a86d71841dfce5cf7fa0b66f31bcb5cc582479c6
test poleval-2024

 

challenge
Reading Comprehension
submitter
[name not given]
submitted
2024-09-19 13:19:42.702896 UTC
file basename
out

test-B / f0b16ba8b5ee22b31b0e6b7be276789ab2b85bc2
Metric Score
Score 56.19
Levenshtein 66.53
Answerability 45.86

test-A / 13e7a4ca86825a8f7bfe4ef82b2d5b0b6ac97f39
Metric Score
Score 59.35
Levenshtein 67.98
Answerability 50.72

dev-0 / dd3598f5ceed77d0086f3c5c86034755477e5a81
Metric Score
Score 15.52
Levenshtein 0.02
Answerability 31.02

worst items

note: the gold standard is taken from the challenge
# input expected output actual output test-B Levenshtein
1 9773_0_1 dwóch 0.00
2 9773_0_2 pisanej, ustnej 0.00
3 9773_0_3 ustnej 0.00
4 9773_0_4 0.00
5 7478_0_0 280 strzelców, kilkuset chłopów kosynierów i 60 kawalerzystów 0.00
6 7478_0_1 29 marca 1831 0.00
7 7478_0_2 0.00
8 7478_0_3 nie 0.00
9 7478_0_4 0.00
10 7699_0_0 aby jej przyszły mąż mógł utrzymać miejsce w linii sukcesji brytyjskiego tronu, w tym czasie bowiem act of settlement odsuwał od dziedziczen… 0.00
11 7699_0_1 w kaplicy świętego jerzego na zamku windsor 0.00
12 7699_0_2 0.00
13 7699_0_3 nie 0.00
14 7699_0_4 pięćset tysięcy funtów 0.00
15 7815_0_0 chciano zaspokoić głód przed zbliżającym się postem 0.00
16 7815_0_1 tłuste 0.00
17 7815_0_2 tak 0.00
18 7815_0_3 pączki, faworki i bliny 0.00
19 7815_0_4 0.00
20 7588_0_0 0.00
21 7588_0_1 mistrz polski oraz zdobywca pucharu polski sezonu zakończonego w roku rozgrywania superpucharu 0.00
22 7588_0_2 superpuchar polski 0.00
23 7588_0_3 na stadionie mistrza polski 0.00
24 7588_0_4 około tydzień przed startem nowego sezonu ekstraklasy 0.00
25 7588_1_0 euro 2012 0.00
26 7588_1_1 nie było odpowiednio dużego obiektu 0.00
27 7588_1_2 legia warszawa i śląsk wrocław 0.00
28 7588_1_3 nie 0.00
29 7588_1_4 0.00
30 9178_0_0 2 listopada 2015 0.00
31 9178_0_1 w automatach śkup 0.00
32 9178_0_2 inkasenci 0.00
33 9178_0_3 tak 0.00
34 9178_0_4 0.00
35 8922_0_0 28 czerwca 2004 0.00
36 8922_0_1 w warszawie 0.00
37 8922_0_2 0.00
38 8922_0_3 29 sierpnia 0.00
39 8922_0_4 od 1 lipca do 25 sierpnia 0.00
40 9720_0_0 by korzystać z różnych stylów rapowania i różnych podmiotów 0.00

Compare with other submission